Batu Lawi dianggap suci oleh kebanyakan penduduk yang tinggal di kawasan tersebut, seperti puak Kelabit dan Penan. Menurut penduduk Kelabit, puncak gunung tersebut merupakan pasangan suami isteri dewa pelindung yang merupakan asal kesemua penduduk tanah tinggi. Lagenda Kelabit menyatakan ketika gunung api yang digelar Batu Apoi cuba membakar semua makhluk hidup [2] Batu Lawi bangkit melawannya dan api Batu Apoi berjaya dipadamkan. Orang Kelabit secara tradisi akan melawat Batu Lawi dari penempatan dari Bario atau Ba Kelalan—sekitar dua hari berjalan melalui hutan yang kini merupakan sebahagian Taman Negara Pulong Tau. Menurut adat mereka, dari saat mereka mula melihat gunung sehingga mereka berdiri di kakinya, mereka tidak boleh menyebut nama gunung tersebut bagi mengelak membuat penjaga puncak gunung marah.[2]